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Abstract Of DE 19631414 (A1) 

A device proposed for the capturing of the image of 
the outside world on the retina of the human eye 
using a scanning capturing device, whereby bean-is 
from the outside world are transmitted via the lenses 
of eye glasses, whose inner sides are shaped as 
convex image-forming beanvspiitting mirrors and in 
which a biaxial scanner device is provided for the 
capturing of the re-dispersed beam of light from 
each point on the retina and the outgoing parallel 
beam of light fi*om the eye, together with its image 
and deflection, transfering the luminous beam to an 
optoelectronic detector for serial capturing of the 
retinal reflex images. 
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@ Vorrlchtung zur Aufnahme des Netzhautreflexbildes und Oberlagerung von Zusatzbildem im Auge 



) Es wird eina Vorrichtung zur Aufnahme des auf der 
menschlichen Netzhaut des Auges abgebildeten Slides der 
Au&enwelt mit Htlfe einer scannenden Aufnahmevorrichtung 
vorgeschlagen, bei der die Strahlen der Au8enwelt dutch die 
GISser eIner Brilie transmittiert werden, die auf ihren 
Innenselten als gewdibte abbildende Strahiteilerspiegei ge* 
Staitet slnd und bei der zur Aufnahme des von jedem Punkt 
der Netzhaut zuruckgestreuten und aus dem Auge auatre- 
tenden parallelen Strahlenbunde! und zu ihrer Abblldung 
und Umlenkung eine zweiachstge Scanvorrichtung vorgese- 
hen ist die das UchtbOndel zu einem opto-eiektronischen 
Detektor zur serlellen Aufnahme des Netzhautreflexes wei- 
terleitet. 
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Beschreibung 

Die Erfindung betrifft eine Vorrichtung, die es ermog- 
licht, das auf der Netzhaut des menschlichen Auges pro- 
jizierte Bild der AuBenwelt in Riickstreuung aufzuneh- 
men, dieses mit elektronischer Bildverarbeitung zu mo- 
difizieren, bzw. mit zusatzlichen Informationen zu er- 
ganzen, und mit Hilfe einer Laserstrahlmodulation und 
-ablenkung zuruck ins Auge mit dem Originalbiid zu 
tiberlagern. 

Mit dem zunehmenden Bedarf an Informationen und 
ihrer libersichtiichen bildhaften Visualisierung wachsen 
die technischen Anforderungen an die Aufhahme, Ver- 
arbeitung und Wiedergabe von Bildem. Der rasche 

Fortschritt auf diesen Gebieten geht Hand in Hand mit 
der immer schneller werdenden Bildverarbeitung durch 
Computer. 

Das Hauptanwendungsgebiet der elektronischen 
Bildverarbeitung ist heute die Weiterverarbeitung von 
Bildem, die von Kameras, Abtastsysteraen und Senso- 
ren, sowohl im sichtbaren Lichtbereich, als auch in ande- 
ren Bereichen des elektromagnetischen Spektrums, wie 
im Intrarot-, Radio- und Rontgenbereich, aufge- 
nommen werden. Nach der elektronischen Bearbeitung 
werden die Bilder als Einzelbilder, bzw. als bewegte 
Bilder auf einer Bilddarstellungsfiache (Display) zur In- 
formationsaufnahme des Auges wiedergegeben. 

Mit Hilfe der elektronischen Bildverarbeitung ist es 
einerseits mdglich, besondere Bildinhalte leichter er- 
kennbar zu machen. Hierfiir eingefiihrte Techniken. sind 
z. B, Ortsfrequenzfilterung, Kantenverscharfung, Bild- 
datenkompression, Bildkorrelation, Dynamikreduzie- 
rung und Falschfarbenkodierung.Andererseits befassen 
sich weitere Techniken mit der Uberlagerung oder Sub- 
traktion von Zusatzbildem aus verschiedenen Spektral- 
bereichen, oder der Oberlagerung von gespeicherten 
Planen, Landkarten, und Zeichnungen in das Original- 
biid 

Fur viele Anwendungen, ist eine praktisch verzoge- 
rungsfreie Biiddarstellung fiir das Auge von groBem 
Vorteil, wie z, B. beim Fuhren eines Flugzeuges, eines 
Schiffes, eines Fahrzeuges oder bei der Steuerung und 
Oberwachung von Prozessen und FertigungsstraBen. 
Mit der Bildverarbeitung kann eine gezielte Erhohung 
bzw. Reduktion des Informationsgehaltes des aktuellen 
direkten Bildes durchgefuhrt werden. Die Anwendun- 
gen reichen von Erhohung des Bildkontrastes bis zur 
Einblendung von Zusatzinformationen und Kennzeich- 
nung von Details und Gef ahren. 

In den meisten dieser Anwendungen ist es nachteilig, 
daB die elektronische Kamera ein von dem Auge des 
Menschen getrenntes "zweites Augensystem" darstelit, 
denn zum einen werden die Bilder von einem anderen 
Auf nahmeort aus gesehen und zum anderen werden auf 
dem Bildschirm an einem anderen Betrachtungsort als 
den des Auges dargestellt Das menschliche Auge muB 
somit zwischen der direkten und der indirekten Beob- 
achtung, mit unterschiedlichen Betrachtungswinkeln, 
Bildausschnitten und GroBenverhaltnissen standig 
wechseln, was zu korperlichen Beeintrachtigungen und 
Verzogerungen bei Entscheidungsvorgangen fiihrt. 

Diese Einschrankung konnte zum Teil mit Hilfe der 
Technik des "Head-Up-Displays (HUD)", bei der Fuh- 
rung von Kampfflugzeugen dadurch gelost werden, daB 
wichtige Informationen wie Instumentenanzeigen und 
Zieldaten in die offene Brille des Pilotenhebnes und da- 
mit in dasGesichtsfeld des Piloten eingeblendet werden. 
Diese Technik wird auch versuchsweise in der Automo- 
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bilindustrie zur Einblendung von Instruinentenanzeigen 
in die Windschutzscheibe eingesetzt, damit der Fahrer 
von der Beobachtung der vor ihm liegenden StraBe 
nicht abgelenkt wird. 
5 Eine bekannte Weiterentwicklung dieser Technik ist 
die sogenannte "virtual realitv" oder "cyberspace". Hier 
werden in einer geschlossenen Brille, d h. einer Brille in 
der die Sicht nach auBen versperrt ist, mit dem HUD 
bewegte raumliche VoUbilder realitatsnah in das Auge 

10 projiziert und interaktiv mit den Korperbewegungen 
wie etwa der Fortbewegung, Armbewegung, Fingerbe- 
wegung, Kopf- und Augenbewegung verandert 

In dem HUD wird das Bild auf einem Bildschirm ge- 
neriert und nach Reflektion an der Brillenoberflache in 

15 das Auge eingeblendet Das Auge sieht sozusagen Ober 
die Brille als Vollspiegel auf das Display "um die Ecke 
herum" und bei der offenen BriDe mit einem teildurch- 
lassigen Spiegel gleichzeitig die AuBenwelt Da das Dis- 
play mit dem Kopf verbunden ist, folgt das Bild den 

20 Kopfbewegungen. 

Einige HUDs sind mit einem "eye tracker" ausgeru- 
stet, der die Augenbewegungen mit Hilfe eines Bewe- 
gungssensor am Augapfel oder einer Kamera die Bewe- 
gungen der Augenpupillen oder der GefaBstruktur der 

25 Netzhaut verfolgt Das im HUD projizierte Bild kann 
dann entsprechend den Bewegungen innerhalb des Ge- 
sichtsfeldes elektronisch verschoben werden. 

Zur akkommodationsfreien Entspannung des Auges 
kann das Bild des HUDs uber die Projektionsoptik ins 

30 "Unendliche" versetzt werden, Mit der Einstellung un- 
terschiedlicher Blickwinkel der beiden Augen zum glei- 
chen Gegenstand, wird ein stereoskopisches, d. h. raum- 
liches Sehen ermdglicht 
Diese Anwendungen und Techniken verdeutlichen 

35 zum einen den hohen Stand der elektronischen Bildver- 
arbeitung, die mit vertretbarem technischen Aufwand 
bereits in der Lage ist, bewegte Bilder mit akzeptabler 
Qualitat fast verzogerungsfrei zu verarbeiten, zum an- 
deren den zunehmenden Bedarf an direkter Bilduber- 

40 tragung ins Auge. 

Der heutigen Technik der HUDs sind jedoch Gren- 
zen gesetzt Die Genauigkeit der automatischen Verfol- 
gung der Augenbewegungen mit dem "eye tracker" ist 
wesentlich schlechter als die Ausrichtegenauigkeit und 

45 die Bildauflosung des Auges. Als Folge schwebt oder 
tanzt das eingeblendete Bild in dem Gesichtsfeld herum, 
was zu einer ungenauen Zielfindung und Ermudung des 
Auges fiihrt. 

Aus diesem Grunde beschrankten sich die bisherigen 
50 Anwendungen der Vollbilddarstellung auf die geschlos- 
sene Brille, dh. die ausschlieBliche Einblendung von 
Fremdbildem. Die Anwendungen der offenen Brille mit 
der zusitslichen Sicht nach auBen sind dagegen noch 
auf die Einblendung einfacher Zusatzinformationen in 
55 Form von Texten, Symbolen oder Bildumrissen be- 
schrankt 

Eine voUstandige raumliche und zeitliche Oberlap- 
pung von eingeblendeten Bildem auf das von dem Auge 
wahrgenommene reale Bild setzt die exakte raumliche 

60 und zeitliche Obereinstimmung der beiden Bilder auf 
der Netzhaut voraus. Diese kann erst durch eine direkte 
Aufnahme des Netzhautbildes und durch eine anschlie- 
Bende fast verzogerungsfreie deckungsgleiche Projek- 
tion des neuen Bildes auf das reale Bild hergestellt wer- 

65 den, was die Zielsetzung der Erfindung ist 

Es soil hier zunSchst der Stand der Techniken der 
Aufnahme von Netzhautreflexbildem, der Bildabta- 
stung aus dem Augeninneren und der Projektion von 
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Laserbildem direkt ins Auge, von der die Erfindung aus- chen Lichtsignalen bei dem stark verrauschtem Hinter- 
geht, dargestellt und diskutiert werden. grund gegenilber der parallelen Aufnahmetechnik eine 

Die technische Reaiisierung einer kontinuierlichen Reihe anderer Vorteile, die den Nachteil der kurzen 
Abbildung des Netzhautreflexes der AuBenwelt setzt Integrationszeitwettmachen.Diesesind: 
eine verwertbare optische Reflexion der Netzliaut vor- 5 

aus. Ihr Reflexionsvermogen ist z. B. von RC Delori und — serielle Signalverarbeitung, die eine direkte ana- 

ICR Pflibsen in der Arbeit "Spectral reflectance of the ioge Weiterverarbeitung des Bildes in Echtzeit er- 

human ocular fundus", Applied Optics, Vol 28, No. 6, mdglicht 

(1989) ausfahriich gemessen worden. Ab dem blauen — effiziente StreuIichtunterdrQckung durch das 

sichtbaren Bereich (450 nm) mit dem niedrigen Wert 10 kleinemomentaneGesichtsfeldderAbtastung 
von 0^% nimmt das Reflexionsvermogen der Netzhaut- - rauscharme hohe Vorverstarkung der verwen- 

grube bis 10% im langwelligen roten Bereich (750 nm) deten Avalanche-Photodioden und Photomulti- 

monoton zu. Im Bereich der groBten Augenempfindlich- pliem 

keit und des scharfsten Sehens im griin-gelben Bereich — hohe Signaldynamik, die den starken Variatio- 

zwischen 500 nm und 600 nm liegt das Reflexionsver-* 15 nen der Bildhelligkeit auf der Netzhaut entgegen- 
mogen dann zwischen 1 % und 2%. kommt 

Ein Aufnahmesystem, fur diesen Reflex, mu6 deshalb - effiziente analoge Rauschunterdruckung, z, B. 

fur eine um den Faktor 50-100 geringere Leuchtdichte durch phase-lock-in- Detektion bzw. Signal-Korre- 

der Netzhaut als des Gegenstandsraumes ausgelegt lation 

sein. Erne weitere Beeintrachtigung der verfiigbaren 20 - einfache Behebung von Abbildungsfehlem. 
Lichtmenge ist durch die GroBe der Augenpupille von 

1-7 mm gegeben, die im Vergleich zu den ublichen Fur die Zielsetzung der Erfindung ist jedoch der ent- 
technischen Aufnahmesystemen wie Photo- und Video- scheidende Vorteil der seriellen Bildabtastung die wei- 
kameras, relativ klein ist Die Aufnahme des von der tere Mdglichkeit sie mit einer zeitversetzten synchro- 
Netzhaut reflektierten Uchtes setzt aus diesen beiden 25 nen seriellen Laser-Bildprojektion ins Auge zu kombi- 
Grunde einen besonders empfmdlichen Uchtsensor nieren eroff net 

voraus. Wegen dieser Vorteile der seriellen Aufnahme gegen- 

Es ist bekannt, daB ein strukturiertes Reflexbild im uber Film und Videoaufnahmen werden sie seit Anfang 
Bereich der Netzhautgrube oder Fovea centralis bei der der funfziger Jahre vor allem fur die Bildaufnahme im 
Abbildung im Auge entsteht Dies wird z. B. von Cam- 30 Mikroskop eingesetzt Eine serielle Abtastung kann 
pell, F.W. and Green, D.G in dem Artikel: "Optical and dreierlei realisiert werden, erstens durch eine flachen- 
Retinal Factors Affecting Visual Resolution'*, J. Physiol. hafte Beleuchtung des Gegenstandes und einer punkt- 
181, 576-593 (1965) beschrieben. Hier wurde eine hell formigen Abtastung mit einem Photoempfanger, zwei- 
erleuchtete ausgedehnte Gitterstruktur auf die Netz- tens der Abtastung des Gegenstandes mit einer punkt- 
hautabgebildet und das durch das Auge reflektierteBild 35 formigen Lichtquelle und flachenhafter Aufnahme mit 
mit einem Teilerspiegel aus dem Strahlengang abge- dem Photoempfanger und drittens durch die punktfor- 
lenkt und auBerhalb des Auges in einer Bildebene scharf mige Beleuchtung und die gieichzeitige punktformige 
abgebildet Die flachenhafte Abbildung des Gitters nach Abtastung mit dem Photoempfanger mit Verwendung 
der Reflexion an der Netzhaut, d. h. nach zweimaligem der gleichen Scaneinrichtung. Die zwei ersten Metho- 
Durchgang durch das Auge, diente der Bestimmung der 40 den werden als "flying spot" und die dritte als "confocal 
Modulationsiibertragungsfunktion des Auges. Die pho- scanning" Aufnahmetechnik bezeichnet. 
tometrische Auswertung zeigte daB die Qualitat des Re- In den beiden ersteren ist entweder die Quelle oder 
fiexblldes, der von dem Auge selbst wahrgenommene der Empfanger starr und dafiir jeweils der Empfanger 
Bildqualitatsehrnahe kommt oder die Quelle auf dem Gegenstand in Bewegung. In 

Die von Campell u.aL verwendete geschlossene stati- 45 dem dritten werden Quelle und Empfanger gemeinsam 
sche Aufnahmevorrichtung mit extrem heller Bildbe- in dem scannenden Abtastpunkt (konfokal) abgebildet, 
ieuchtung (Blitziicht) am ruhig gestellten Auge ist nicht aber sind gegeneinander unbeweglicL 
geeignetumdielichtschwachendynamischenBilderder Eine Aufnahme des flachenhaften Netzhautreflexes 
AuBenwelt auf der Netzhaut bei den raschen, natiirli- der AuBenwelt mit einem scannendem Photoempfan- 
chen Eigenbewegungen des Auges aufzunehmen. Dies 50 ger, wie die Erfindung vorschlagt, ist in diesem Sinne die 
erfordert lichtempfindliche, schnelle Detektoren und ei- erste Art der "flying spot" BildaufnahmetechniL Eine 
ne Aufnahmetechnik, die in dem offenen Strahlengang zeitversetzte synchrone Laserbildprojekton mit Hilfe 
Fremdlicht sehr effizient unterdriickt und Bilder minde- der gleichen Scaneinrichtung kann im Sinne der gemein- 
stens mit der Wiederholfrequenz der ublichen Video- saraen punktformigen scannenden Abbildung von Be- 
normen aufnehmen kann. 55 leuchtungsquelle und Photoempfanger auf der Netz- 

HeutekommendafurinFragedieCCD-Kameras,die haut als eine konfokale scannende Technik aufgefaBt 
alle Bildpunkte parallel nach einer festen Integrations- werden, aber keine konfokal scannende Aufnahmetech- 
zeit aufnehmen, und seriell scannende Bildaufnahmesy- nik, weil die Rollen des Photoempfangers und des La- 
Sterne mit Einzeldetektoren (Photodioden oder Photo- sers gegenuber der konventionellen Anwendung ver- 
multipliern), in denen die Bildpunkte zeitiich hinterein- so tauscht sind. In der Erfindung dienen die Empfangssi- 
anderabgetastet werden. BeideTechniken sind den flb- gnale zur zeitversetzten Modulation der Laserquelie, 
lichen VideonormenangepaBt bei dem fiblichen Verfahren dient die Laserquelie zur 

Ein grundsatziicher Vorteil der Verwendung der Beleuchtung beim gleichzeitigen Empfang der Llchtsi- 
CCD- Aufnahmetechnik ist die lange Integrationszeit in gnale. 

jedem Bildpunkt von z. B. 20 ms, gegenOber der kurzen 65 Um den Neuheitsgrad der Erfindung und ihrer techni- 
Verweildauer in jedem Bildpunkt von nur 40 ns beim schen Ausfuhrungen besser sichtbar zu machen, soil der 
Scannea Die serielle Aufnahmetechnik hat jedoch fOr Stand der Anwendungen der Bildaufnahme und Laser- 
die Aufnahme der sehr schwachen, schnell veranderli- projektion ins Auge nachfolgend genauer dargelegt 
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werden. dem markteingefuhrten Laser Scanning-Ophthahnosco- 

O. Pomerntzeff und R.H. Webb haben als erste die pen, wie der Firma Rodenstock Instrumente in Miin- 

zweite Art der "flying spot" Aufnahmetechnik mit Hilf e chen realisiert worden sind 

eines gescannten Laserstrahles ais Beleuchtungsquelie Die technische Losung zur Erweiterung der Bilduber- 

und einem starren groBflachigen Photomultiplier als 5 tragung von nur einer auf drei Farben, die in den An- 

EmpfSnger zur Aufnahme der Innenstruktur des Auges spruchen 10 und 1 1 dieses Patentes beschrieben wir4 ist 

in dem US Patent 4^13,678 von Sept 1980 "Scanning auch in anderen Laser-Display- Anlagen seit vieien Jah- 

Ophthahnoscope for Examiiiing the Fundus of the Eye" ren realisiert und stellt deshalb ebenso keine Neuheit 

beschrieben. dar. Die Verschiebung der Hef enlage der Bilder auf der 

Eine Erweiterung dieser Technik zu einer konfokalen 10 Netzhaut, die in den AnsprOchen 12 bis 16 beschrieben 

Anordnung mit dem gieichzeitigen scannen der Laser- ist, wird durch gleichartige Ma6nahmen in den bereits 

strahl und der Empfangsachse des Photomultipliers, existierendenGeratendurchgefuhrt 

wurde von R. H. Webb, G. W. Hughes und RC Delori in Die Trennung von zwei Strahlen durch Polarisations- 

dem Artikel "Confocal scanning laser ophthalmoscope" unterscheidung wie sie in Anspruch 16 bis 19 und in 

in Applied Optics, Vol. 26, No. 8, pp 1492—1499 (1987) 15 Fig. 6 des Patentes beschrieben wird, um ein gleiches 

vorgesteilt. Bild in beide Augen zu projizieren, ist grundsatzlich eine 

In diesem Gerat wird die Netzhaut durch einen La- ungeeignete Methode um "echte" dreidimensionaie Bil- 

serstrahl rasterformig abgetastet, Der Laserstrahl be- der darzusteilen, da diese Bilder hier keinen perspektivi- 

leuchtet Punkt fur Punkt und Zeile fiir Zeile die Vorlage. stischen Unterschied aufweisen. Dariiber hinaus erlaubt 

Der Photoempfanger (Photomultiplier) miBt das jeweils 20 diese Methode keine dynamische und individuelle An- 

reflektierte Licht und setzt die MeBwertfolge in ein Vi- passung an die Augenausrichtung und ist deshalb tech- 

deosignal um. Ein Femsehmonitor stellt das Videosignal nisch schwer umsetzbar. 

schlieBlich als Bild dar. Diese drei Vorgange erfolgen In einer zwelten europaischen Anmeldung der Firma 

exaktsynchron.Wahrend der Laserstrahl Zeile fur Zeile Motorola Ina Nr. 0 562 742 Al mit der Bezeichnung 

den Augenhintergrund abtastet, wird gleichzeitig das 25 "Direct retinal scan display" von August 1993 wird ein 

Fernsehsignal aufgebaut Direktsicht-Bildwiedergabeger^t beschrieben, das wie 

Der Laserstrahl durchlauft zun^chst einen Modulator, das oben beschriebene Patent von Sony auch die direkte 

iiber den die Beleuchtungsintensitat gesteuert werden Bildubertragung auf die Netzhaut betrifft, jedoch mit 

kann. Die horizontale Zeilen-Ablenkung wird meist mit dem Unterschied, daB die Projektion Qber die Umlen- 

einem schnell drehenden Polygonspiegel, die Vertikal- 30 kung tiber eine dem Menschen aufgesctzte Brille durch- 

ablenkung durch einen Schwingspiegel durchgefuhrt gefiihrtwird. 

Der Drehpunkt der Abtastbewegung liegt in der Puppil- Diese Patentanmeldung bringt gegeniiber der lange 

lenebene des Auges. Das vom Augenhintergrund reflek- bestehenden Technik keine neue L5sungsansatze. Die 

tierte bzw. zuriickgestreute Licht wird iiber die gesamte direkte Montage des gesamten Displays am Kopf des 

Pupillenoffnung gesammelt und dem Photoempfanger 35 Betrachters im Anspruch 4 bzw. die Verwendung einer 

iiber eine Abbildungsoptik zugeleitet Die Strahlablen- Umlenkung des Strahlenganges des Projektors iiber ei- 

kung wird dadurch riickgangig gemacht, und man erhalt ne Brille im Anspruch 5 ist bei "virtuakealit/* Brillen 

ein stationares Lichtbiindel, das auf einer kleinen Detek- bzw. bei Head-Up-Display im Pilotenhelmen bereits 

torflache abgebildet wu-d eingeftihrt 

Die Moglichkeit der Verwendung der konfokalen Ab- 40 Damit eine Abbildung auf der Netzhaut gelingt, miis- 
bildung im Ophthahnoskop zur Projektion von kiinstli- sen verschiedene optische Anforderungen an die Laser- 
chen Bildern mit Hilfe einer Laserprojektion in das Au- strahlumlenkung erfullt werden, die auBer der besonde- 
ge, wurde von Webb a al. in dem obengenannten Arti- ren Auslegung der Strahlfiihrung nach der Strahlablen- 
kel erkannt und wie folgt beschrieben: . . . The laser kung, auch eine spezielle Brillenglaswolbung erfordert. 
beam is deflected by a fast (15-kHz) horizontal scanner 45 Die Wege zur Losung dieser grundlegenden optischen 
and a slow (60-Hz) vertical scanner to project a standard Problematik werden in dieser letztgenannten Patentan- 
format TV raster on the retina. Modulation of the beam meldung jedoch nicht betrachtet oder erwahnt 
permits projection of graphics or even gray scale pictu- 
res in the raster. While the patient is seeing the TV BeschreibungderErfindung 
picture projected on his/her retina, an image of the reti- 50 

na is displayed on a TV monitor . . Die Erf indung schlagt eine seriell arbeitende Aufnah- 

Die Direktprojektion von modulierten Lichtreizen me- und Projektionsvorrichtung vor, die es ermSglicht, 

und Mustern wird in den modemen Laser-Scan Opht- die auf der Netzhaut des menschlichen Auges beim na- 

hahnoskopen (wie z. B. von der Firma Rodenstock in tiirlichen Sehvorgang erzeugten Bilder der AuBenwelt 

Munchen) hauptsachlich fiir Visusanalysen, Video- Vi- 55 aufzunehmen und mit elektronischer Bildverarbeitung 

susbestunmungen und Kontrastempfindiichkeitsmes- zu modifizieren, bzw. zu erg^nzen. Dieses Bild dann 

sungen bei jeweils nur emer Laserwelleniange verwen- nachfolgend mit Hilfe von Laserstrahlbildprojektion zu- 

det. riick ins Auge zu projizieren und mit dem Originalbild 

Weitere Vorschlage zur direkten Bilderiibertragung synchron zu iiberlagern. Die Erfindung sieht femer vor, 

mit Lasern ins Auge sind aus den folgenden zwei Schrif- eo daB sowohl bei der Aufnahme, als auch bei der Projek- 

tenbekannt: tion gleichzeitig die Strahlung aller Grundfarben Rot, 

In der europaischen Patentschrift 0 473 343 Bl von Nov. Griin und Blau detektiert bzw. projiziert wird 

1995 der Firma Sony Corporation mit dem Titel '^Direct Diese Aufgabe ist grundsatzlich eine andere als die 

viewing picture image display apparatus" ist ein Direkt- eines konfokalen Laser-Scanning-Opthahnoskops bei 

sicht-Bildwiedergabegerat bekannt, das im wesentli- 65 dem die Netzhaut im gieichen Abtastvorgang gleichzei- 

chen nur die technischen Losungswege aus den friiher tig beleuchtet und abgebildet wird, denn in der Anord- 

bekannten und hier bereits zitierten Veroff entlichungen nung gemaB der Erfindung wird in einem ersten Abtast- 

der konfokalen Abbildung beinhaltet, und in den auf zyklus das flachenhafte Reflexbild der AuBenwelt nach 
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dem "flying spof Verfahren abgetastet und erst in ei- der fiexiblen Kopplung der Aufnahme und Projektions- 
nem zweiten zeitlich getrennten Abtastzyklus das nach- vorrichtung an den Strahlumschalter und Scaneinheit 
gearbeitete Laserbild auf die Netzhaut projiziert In ei- mit Hilf e von flexiblen Glasf asern nach Anspruch 1 5. 
nem dritten Abtastvorgang wird wieder das Reflexbild Fig. 5 ein Schemabild eines Ausfiihrungsbeispieles 
gewonnen, in dem vierten wieder das Laserbild proji- 5 der Anbringung der Aufnahme- und Projektionsvor- 
ziert usw. Da diese Vorgange zeitlich so schnell wech- richtung fur beide Augen in einem Brillengestell. 
seln, entsteht fflr das Auge, wie bei der Betrachtung vom Fig. 6 ein Schemabild eines Ausfuhrungsbeispiel des 
Fernsehen Oder Film, ein kontinuierlicherAblauf in dem Strahlenganges im Scanner bei Aufnahme des Netz- 
das Laserbild synchron und deckungsgleich, unabhangig hautreflexes und anschlieftender Projektion des Bildes 
vonden Augenbewegungen,demOriginalbiIdfolgt. 10 auf die Gegenstande der AuBenwelt, durch eine Urn- 
Die Erfindung unterscheidet sich auch von alien dem schaitung des horizontalen Scanspiegels urn einen Win- 
Anmeider bekannten Vorschlagen zur direkten Laser- kel von 90^ nach Anspruch 23. 
projektion ins Auge, sowohl der Projektion von Fremd- Fig. 7 ein Schemabild der opto-eiektronischen und 
bildern in der geschlossenen Brille (cyberspace), als auch elektronischen Untereinheiten und ihren Verbindungen. 
der Zusatzbildern in einer offenen Brille (HUD), durch 15 Fig. 8 ein Schemabild des zeitlichen Ablaufs der Ab- 
die hier zum ersten Male vorgeschlagene direkte Kop- tast- und Laserprojektionsvorgange 
peiung der Projektion mit dem momentanen Bildinhalt Fig. 9 ein Schemabild des in Mikrobauweise im Bril- 
der AuBenwelt und die neuartigen technischen Ausfuh- lengestell integrierten Seamier mit Giasfaserkopplung 
rungenzuihrerRealisienmg. zu einer tragbaren Empfangs- und Projektionseinheit 
Die Aufnahme und bildhafte Weiterverarbeitung des 20 und drahtioser Obertragung zum Bildverarbeitungs- 
Netzhautreflexes ist durch den raschen Fortschritte in computer. 

der Aufnahme- und Verarbeitungstechnik von schwa- Die Erfindung schiagt gemSB dem Anspruch 1 eine 
chen optischen Signalen mogiich geworden. Die Be- scannende Aufnahmevorrichtung vor um den licht- 
strahlungsstarke die die Netzhaut in der naturlichen schwachen Reflex von Gegenstande der AuBenwelt 
Umgebung ausgesetzt ist betragt von der hellsten Au- 25 AW auf der Netzhaut NH des Auges AA seriell aufzu- 
Benbeleuchtung von 10""^ W cm~^ bis etwa 10'^ W nehmen wie, m den Fig. 1 bis Fig. 3 dargestellt ist 
cm "2. Bei schwacher Innenbeleuchtung, unter Lesebe- Die gleiche Abbildungs- und Scanvorrichtung wird 
dingungen betragt sie 10"^ W cm"^ bis 10"^ W cm"^ auch verwendet um das verarbeitete Bild mit Hilfe von 
(siehe z. B. "Safety with Lasers and Other Optical Sour- Lasern und Bildmodulatoren iiber den entgegengesetz- 
ces", D. Sliney and M. Wolbarsht, 1980). Mit einem Pho- 30 ten Lichtweg auf die Netzhaut zeitversetzt gemaB An- 
ton-Counting Photomuitiplier und punktueller Abta- spruch 2 zu projizieren, wie auch in Fig. 1 bis Fig, 3 
stung mit Lasern in einer TV-Norm wurde eine Emp- dargestellt ist 

findlichkeit bis zu 2 x 10"^ W cm"^ bei emem Signal- Der zentrale Gegenstand der Erfindung ist eine spe- 

Rauschverhaltnis von 5 erreicht (s. R.H. Webb et al, zielle Brille, die einem Betrachter aufgesetzt wird, wie m 

"Flying spot TV ophthalmoscope", Applied Optics, Vol 35 Fig. 5, Fig, 6 und Fig. 9 gezeigt ist Die Brillenglaser BG 

19, No. 17, pp, 299 (1980). dienen als Strahlteiler. In Transmission, fur das Licht aus 

Eine Erhohung der Empfindlichkeit bis 10"^ W cm""^ der AuBenwelt und in Reflexion, als eine Abbildungsfla- 

kann z. B. erreicht werden durch verbesserte Rauschun- che des von der Netzhaut durch das Auge ruckgestreu- 

terdriickung, erne verringerte Ortsaufldsung, bzw, durch ten Lichtes, das mit Hilfe weiterer Abbildungselemente 

die Verwendung eines Spiral-Scans anstatt des TV-Ra- 40 und eines zweiachsigen Scanner fur die Horizontal- 

sterscans, der eine reduzierte Scan-Geschwindigkeit in HSS und Vertikalablenkung VSS einem PhotoempfSn- 

der Mitte des Gesichtsfeldes und damit eine verlangerte ger zugefuhrt wird (Fig. 1 bis Fig, 4). 

Integrationszeit dort bietet Der Strahlengang wird gleichzeitig derart gestaltet 

Die Aufgabe der Erfindung wird durch die in An- daB die Verlangerung der Sichtlinie vom Detektor 

spruch 1 und 2 angegebenen Merkmale gelost In den 45 durch die Brille immer in der absorbierenden Schicht 

UnteranspriichensindvorteilhafteAusgestaltungenund einer Strahlungssenke SS mundet Die Verlangerung 

Weiterbildungen angegeben. der Sichtlinie des Auges durch die Brille lauft dagegen 

In der nachfolgenden Beschreibung wird die Erfin- zur AuBenwelt AW (Fig. 1 bis Fig. 6). 

dung anhand von Ausfiihrungsbeispielen erlautert Die Die einfachste Methode der Strahlteilung an den Bril- 

Figuren erganzen diese Erlauterungen. Es zeigt: 50 lenglasem BG ist die Verwendung von 50% transmittie- 

Fig. 1 ein Schemabild eines Ausfuhrungsbeispieies renden und 50% reflektierenden Spiegelglasern. Es 

der Aufnahme- und Projektionsvorrichtung ins Auge konnen auch aktive elektronisch steuerbare Spiegel, die 

nach Anspriichen 1 bis 5 in einer Ausfuhrung wo die von volistandiger Transmission bis vollstandiger Refle- 

Abbildung zwischen dem Scanner und Auge uber zwei xion in den beiden Abtastzyklen umschalten, eingesetzt 

konkave reflektierende Flachen einen Hilfspiegels HS 55 werden. 

und die Innenseite der Brille BG durchgefuhrt wird. Das Auge AA bildet von der AuBenwelt AW parallele 

Fig. 2 ein Schemabild eines Ausfuhrungsbeispieies oder nahezu parallele Strahlbundel auf der Netzhaut ab. 

der Aufnahme- und Projektionsvorrichtung ins Auge Der Drehpunkt der Strahlbtindel bei unterschiedlichen 

nach Ansprtichen 1 bis 4 und 6 in einer Ausfuhrung wo Betrachtungswinkel zur AuBenwelt liegt in der Pupiile 

die Abbildung zwschen dem Scanner und dem Auge an eo des Auges AP. 

der konkaven Hilfsspiegelflache BG', einer konvexen Die Erfindung geht von einer gleichzeitigen Aufnah- 

Hiifsspiegel HS' und der konkaven Innenseite des Bril- me und Projektion in beide Augen wie in Fig. 5 und 

lenglases BG durchgefuhrt wird Fig. 6 gezeigt wird und damit einem ^veitgehend identi- 

Fig. 3 ein Schemabild eines Ausfuhrungsbeispieies schen Strahlengang fiir das linke und rechte Auge. Bei 

des starren Strahlenganges zwischen Aufnahme- und 65 Fehlsichtigen, auch mit unterschiedlicher Brechkraft des 

Projektionsvorrichtung mit PhotoempfSngem und La- iinken und rechten Auges, sieht die Erfindung vor, daS 

sermodulatoren nach Anspruch 14. entweder die Brillenglaser in ihrer Brechung durch ent- 

Fig.4 ein Schemabild eines Ausftihrungsbeispieles sprechende unterschiedliche Auslegung der Wdlbung 
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der AuBenseite und der Innenseite individuell angepaBt 
sind, bzw. daB Kontaktlinsen getragen werden. Fiir Nor- 
malsichtige ist die Welbung der Innen- und AuBenseite 
der Briilenglaser die BrillenglSser BG identisch. 

Das von jedem einzelnen Bildpunkt der Netzhaut aus 
dem Auge zurriickgestreute Licht ist in gieicher Weise 
eine nahezu paralleles Strahlenbiindel, der den identi- 
schen Weg wie das einfallende Licht in entgegengesetz- 
ter Richtung auf die Innenseite des teilweise reflektie- 
renden Brillenglases BG fallt. Die Krummung dieser 
Flache wird so gestaltet, daB gemeinsam mit der Augen- 
linse ein zweites Bild des Bildpunktes auf der Netzhaut 
in der Zwischenebene ZE entsteht (Fig, 1). Ein Hilfsspie- 
gel HS, kollimiert die Strahlen emeut und bildet sie so 
ab, daB sie uber den geniemsamen Drehpunkt (sie auf 
der anderen Seite durch die Augenpupille) auf der Ach- 
se des horizontalen Scannerspiegels HSS veriSuft Eine 
vertikale Ablenkung wird durch einen zweiten Scanner- 
Spiegel VSS durchgef uhrt 

Die Abbildung aus und ins Auge mit Hilfe der beiden 
Spiegel, Hilfsspiegel und Brillenglasspiegel bei gleich- 
zeitiger freier Sicht durch das Brillenglas BG zur Au- 
Benwelt AW erfordert relativ starke Strahlablenkung. 
Die gegenlaufige Umlenkung uber zwei konkave Spie- 
gelflache hebt zum Teil die dabei auftretenden Abbil- 
dungsfehler auf. Der gegenlaufige sonst identische 
Strahlengang von Bildaufnahme und Bildprojektion 
vermeidet auch zum groBen Teil die Entstehung von 
Bildverzerrungen im Auge auf. 

Bei spharischen Spiegeln treten jedoch wegen ihren 
starken Abbiidungsfehlern trotzt der relativ kleinen er- 
forderlichen Ablenkwinkel von < ± 10*" restliche Bild- 
stdrungen auf. Fur die Abbildung und Umlenkung ins 
Auge sind deshalb hochwertigere Spiegelsysteme, wie 
konkave Parabolspiegel und elliptische Spiegel in An- 
spruch 5 vorgesehen. Eine effiziente Reduktion der Ab- 
bildungsfehler ist nach Anspruch 6 auch mit Hilfe der 
Spiegelung an zwei konkaven BG und BG' und einer 
konvexen Flache HS mdglich. Hier kann als Vollspiegel- 
fl^che BG' die zweite H^fte des Brillenglases, gieicher 
konkaven Krummung wie BG verwendete werden. 

Die Erfindung geht davon aus daB jede Art von zwei- 
achsigen Bildscannern verwendet konnen wie z. B. 
Drehspiegel oder Polygonspiegel fur Zeilenablenkung 
und Schwingspiegel fiir Vertikalablenkung bzw. akusto- 
optische Ablenkeinheiten fiir beide Achsen. 

Mit einer rasterformigen Abtastspur mit getrennter 
horizontaler und vertikaler Ablenkung kann der Aufbau 
des Bildes konform mit den gebrauchUchen Video-Nor- 
men wie VHS und NTSC und HDTV gestaltet werden 
(Anspruch 9). 

Es konnen aber andere Abtastspuren, die dem Bild- 
aufbau des Auges besser angepaBt sind ais der Raster- 
scan, verwendet werden, wie z. B. ein Spiralscan. Die 
groBte Sehscharfe in der Netzhaut (Retina) ist im Be- 
reich der sogenannten Fovea centrales, die im Gesichts- 
feld nur einen kleinen Winkelbereich von etwa ± 2° um 
die Sehachse aufnimmt Wenn sich die Aufmerksamkeit 
auf ein Objekt richtet, werden die Augen normalerweise 
so beweg{ daB die vom fixierten Objekt ausgehenden 
Strahlen auf die Fovea centralis fallen. 

Ein Spiralscan der Bildabtastung, in dem die Aufent- 
haltsdauer des Abtaststrahles in Richtung zur Sehachse 
kontinuierlich zunimmt, ware dadurch wesentlich besser 
dem Aufbau der Netzhaut angepaBt als ein Rasterscan. 
Durch die verlangerte Aufenthaltsdauer wird dadurch 
auch ein entsprechend hoheres Signal/Rauschen-Ver- 
haltnis in dem mittleren Bereich erreicht 
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Die Erfindung sieht aus diesen Griinden auBer der 
Verwendung eines Rasterscans in Anspruch 9 auch in 
dem Anspruch 10 auch vor, daB durch eine entsprechen- 
de Auslegung und Ansteuerung der beiden Strahlab- 
5 lenkeinheiten ein Spiralscan auch verwendet werden 
kann. 

Wie in einem Laser-scanning-ophthalmoskop wird 
der Strahlengang zwischen dem Projektions- und Emp- 
fangskanal mit Hilfe eines Schaltspiegels SUS getrennt. 

10 Da der Durchmesser des Projektionsstrahls wegen der 
guten Bundelung und dem kleinen Durchmesser der La- 
serstrahlen kleiner ausgelegt werden kann ais der Emp- 
fangsstrahi bietet sich die Moglichkeit an einen Loch- 
spiegel zur Trennung der beiden Strahlengange wie in 

15 Fig. 3 und Fig. 4 dargestellt ist, zu verwenden. Eme effi- 
zientere Methode, die sich wegen der zeitlich altemie- 
renden Verwendung der beiden Strahlengange ergibt, 
ist der Einsatz eines Kippspiegels der die Strahlengange 
synchron mit der Abtastung umschaltet Diese Losung 

20 hat die VorteOe der geringeren optischen Verluste im 
Empfangskanal und der besseren optischen Abschir- 
mung des direkten Obersprechens von Projektions- in 
den Empfangskanal. 
Im Strahlgang der Projektionseinheit hinter dem 

25 Strahlschalter SUS ist wie in Fig. 3 gezeigt sieht die 
Erfindungsmeldung im Anspruch 17 eine Fokussierein- 
richtung FE, die die GroBe des Laserbildflecks in An- 
spruch 17 und des abgetasteten Flecks beim Empfang 
GFB in Fig. 3 auf der Netzhaut einstellt Zur Einstellung 

30 des von den Photomultipliem gesehenen momentanen 
Gesichtsfeldes dient nach Anspruch 18 eine gemeinsa- 
me Gesichtsfeldblende GFB im Strahlengang zweier 
Linsen. Die Einstellung der Gesichtsfeldblenden ist zur 
Anpassung an die Beleuchtungsverhaitnisse an der 

35 Netzhaut und zur Einstellung der erwiinschten Ortsauf- 
Idsung notwendig, Es ist vorgesehen, daB beide Einstel- 
lung iiber Aktoren automatisch nach Rechnerbefehl 
durchgefuhrt werden konnen wie in Fig. 7 dargestellt 
wird. 

40 Es ist in Anspruch 12 vorgesehen, daB der Netzhaut- 
reflex mit der Verwendung von dichroitischen Filiem 
(DFR, DFG und DFB) und drei getrennten Detektoren 
(PMR, PMG und PMB) in bis zu drei Farbkanalen auf- 
geteilt ist und damit ein weitgehend unverfalschtes 

45 Farbbild aufgenommen werden kann. Auf der Lasersei- 
te wird ebenso mit dichroitischen Strahlteilern die 
Strahlen von bis zu drei Lasern im roten, grunen und 
blauen Spektralbereich (LR, LG, LB) nach der getrenn- 
ten Bildmodulation jeder Farbe (MR, MG, MB) auf ei- 

50 ner gemeinsamen Achse vereinigt 

Zur farbtreuen Bildaufnahme wird das optische Si- 
gnal mit dichroitischen Filtern DFR DFG und DKB im 
Empfangskanal in die drei Farbkomponenten vor den 
drei Photoemp&igem, verzugsweise Photomultipliem 

55 PMR, PMG und PMB in die drei Grundfarben zerlegt 
und getrennt vermessea Wegen der schwachen Lichtsi- 
gnale werden vor allem Photon-counting Verfahren 
zum Einsatz kommen. 
Die Erfindung sieht femer vor, daB das von dem De- 

60 tektor aufgenommene elektronische Bild nach einer 
Bildverarbeitung mit Hilfe von Laserstrahlquellen und 
-modulatoren wieder in ein serielles optisches Bild um- 
gewandelt wird, und in einem zweiten Bildzyklus mit der 
gleichen optischen Einrichtung, — jetzt in der Funktion 

65 als Strahlablenkeinheit (Laser-Scanner) — nach Refle- 
xion an der Brillenglasinnenflache in das Auge synchron, 
aber zeitversetzt mit der Abtastung des Originalbildes 
zuruckprojiziert wird. 
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Die Erfindung schiagt vor in Anspnich 20 die Peri- 
oden der Bildaufnahme und Bildprojektion zeitlich zu 
trennen, d. h. alternierend durchzufuhren wie in Fig. 8 
dargestellt ist, um eine Stoning der Aufnahme des 
schwachen Netzhautbildes der Aufienwelt durch die 
lichtstarkere Projektion zu vermeiden. In einem ersten 
Bildzyklus wird z. B. das Netzhautreflexbild aufgenom- 
men und in dem zweiten wird das verarbeitete elektro- 
nische Bild in das Auge projiziert In dem dritten Bildzy- 
klus wird eine Aufnahme des Netzhautreflexbildes 
durchgefuhrt, in dem vierten wird wieder die Zurfick- 
projektion durchgefuhrt, usw. 

Wenn dieser Bildwechsei schnell genug ist, sorgt die 
Tragheit der Gesichtsinnes dafiir, daB beide Bilder dem 
Betrachter uberlagert erscheinen, vorausgesetzt, daB 
die Zeitverzogerung fur das in das Auge eingeblendete 
Bild unterhaib der Bewegungsdauer und Wahmeh- 
mungszeit des Auges liegt, und daB die Stabilitat und 
Aufldsung des eingeblendeten Bildes mit der Auflosung 
des Auges vergleichbar ist 

Damit, sowohl die unbewuBten schnellen Sakkaden- 
bewegungen des Auges mit einer mittleren Amplitude 
von 5 Bogenminuten und einer Dauer zwischen 10 und 
20 msec, als auch die schnellen Augenbewegungen von 
20"* —30*" /sec beim Verfolgen eines bewegten Objektes 
iiber einen groBeren Winkel erfaBt werden konnen, 
muB die Bildwiederholfrequenz ausreichend hoch sein. 
Mit einer Wiederholfrequenz zwischen 50 Hz bis 
100 Hz, sowie in der Femsehen- und Computertechnik, 
ist die Aufnahme den schnellsten Bewegungsvorgangen 
des Auges weitgehend angepaBt Dies gilt, sowohl fur 
einen Raster- als auch einen Spu'alscan. 

Weitere technische Anforderungen an die Aufnahme- 
vorrichtung betreffen die Gr56e des erfaBten Gesichts- 
feldes und die Bildaufldsung der hier vorgeschlagenen 
Vorrichtung. Fiir die meisten Anwendungen ist der Be- 
reich des schSffsten Sehens mit einem Durchmesser von 
10 und einer Anzahl von 7 Millionen Zapfen (Bildpbcel) 
in der Netzhautgrube (Fovea) aber auch der angrenzen- 
de Bereich mit wesentlich geringerer Auflosung bis et- 
wa 10** Durchmesser von Interesse. Fur diese Unter- 
schiedlichen Auflosungsanforderungen ist gerade der 
Spiralscan der Abtastspur besonders geeignet 

Als Lichtquellen zur Ruckprojektion der Bilder ins 
Auge sind Halbleiterlaser bzw. miniaturisierte Festkor- 
perlaser vorgesehen mit einer niedriger Dauerstrichlei- 
stung (< 300 p.W), die keine Gefahrdung des Auges 
verursachen kSnnen. Mit der Verwendung von Halblei- 
terlasem konnte die Bildmodulation direkt iiber ihre 
Stromversorgung durchgefuhrt werden. Damit alle Far- 
ben erzeugt werden empfiehlt sich die Verwendung von 
drei Lasern mit den Grundfarben rot, grun, blau. Wie 
das bekannte Farbdreieck des menschlichen Gesichtsin- 
nes zeigt konnen alle anderen Farben sowie die Unfar- 
ben grau und weiB durch Farbsummation von mono- 
chromatiscben Laserlinien dieser Farben gebildet wer- 
den. Die Er^ndung beinhaltet auch die Mdglichkeit der 
Verwendung von einzelnen Farben als monochromati- 
sche L6$ungvor. 

Die Erfmdung sieht wie in Rg. 7 dargestellt einen 
Signal-Prozessor SP vor, der das direkte Bild von der 
Netzhaut elektronisch bearbeitet und alle Funktionen 
der Vorrichtung sowie die von Scannem VSS/HSS und 
Laserfleckeinstellung und GroBe der Gesichtsfeldblen- 
de LAA/GFB synchron koordiniert Der Bildverarbei- 
tungscomputer BVC ubernimmt dann die vom Auge 
wahrgenommenen Bild oder Bilder anderer technischer 
Sensoren die aber einen extemen AnschluB EA dem 
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Computer zugefiihrt werden und bearbeitet sie nach 
einer vorgegebenen Software SW, bevor sie mit Hilfe 
des Signalprozessors auf die Laserstrahlen als Bildsignal 
aufmoduliert werden. 
5 Die Laser-Projektion ermdglicht auBer der Verarbei- 
tung des aktuellen vom Computer verarbeitetes Bild in 
das Auge zu projizieren und mit dem Originalbild zu 
verschmeizen, auch Fremdbilder, die dem Computer 
von extern zugeleitet werden, dem AuBenbild im Auge 
10 synchron zu uberlagern. Wenn die Zeitspanne zwischen 
Bildaufnahme und -Projektion im Vergleich zu den 
schnellen Augenbewegungen entsprechend kurz ist, 
wird das Auge, wie bei Betrachtung eines Fernsehschir- 
mes, keine Bildunterbrechung mehr wahrnehmen. 
15 Die getrennte aber gleichzeitige Bildabtastung an 
beiden Augen erfafit auch die perspektivischen Unter- 
schiede beider Bilder. Da diese bei der Laser-Zuriick- 
projektion in beiden Augen erhalten bleiben, ist eine 
Wiederherstellung des raumlichen Sehens gewShrlei- 
20 stet 

AuBer der Projektion von den Netzhautbildem nach 
Bildverarbeitung zuriick ins Auge ermoglicht die hier 
vorgeschlagene Einrichtung nach Anspruch 25 auch die 
Projektion dieser Laserbilder direkt auf die in der Um- 
25 welt befindlichen und vom Auge gesehenen Gegenstan- 
de. Dies Ausfuhrung der Erfindung wird schematisch in 
Fig. 6 durch das Umklappen des Scanspiegels um einen 
Winkel von 90° schematisch dargestellt. 
Die in der Erfindung verwendeten Bauelemente sind 
30 heute weitgehend miniaturisiert und kostengiinstig er- 
haltlich. Die Strahlumlenkeinheit und Scanner konnen 
in einem einfachen Brillengestell B wie in Fig. 9 darge- 
stellt ist untergebracht werden. Mit Hilfe von Glasfaser- 
leitung GFL konnen Laserprojektionseinheit und Emp- 
35 fangseinheit abgesetzt in einem kieinen Gehause TOE, 
z. B, der GrdBe eines Taschenbuches mit Battcriever- 
sorgung untergebracht werden. Der Datenaustausch, 
mit einem extemen fest installierten Bildverarbeitungs- 
rechner kann entweder iiber Radiowelien oder Infrarot- 
40 strahler erfolgen. Alle Eiemente der Vorrichtung der 
Erfindung konnten nach dem heutigen Stand der Tech- 
nik somit von einem Menschen miihelos getragen wer- 
den und der drahtlose Bilddatenaustausch mit dem ex- 
temen Rechner wurde seine unbeschrankte Bewe- 
45 gungsfreiheit ermoglichen. 

Die verschiedensten Einsatzbereiche der Erfindung 
konnen in den nachfolgenden vier Kategorien zusam- 
mengefaBt werden: 

50 — Aufnahme von Bildern der AuBenwelt, ihre Ver- 
arbeitung, Zuriickprojektion und Verschmelzung 
mit dem Originalbild im Auge, 

— Oberiagerung von Bildem anderer Aufnahmesy- 
steme, z. B, in von der gleichen Szene in anderen 

55 Spektralbereichen auf das direkte Bild 

— Oberlagemng von virtuellen Bildern, die alleine 
vom Computer hergesteilt werden und 

— Aufnahme von Bildem der AuBenwelt und ihre 
Laser-Projektion nicht ins Auge, sondem auf die 

60 gleichen, vom Auge gesehenen Gegenst^de der 
AuBenwelt 

In der ersten Kategorie sind Anwendungen mit dem 
Ziel, das von dem Auge aufgenommene Bild durch ge- 
65 zieite Bildsmnmation zu verbessem, z. B. ein ver- 
schwommenes oder lichtschwaches Bild zu verscharfen 
und verstSrken, was fiir Sehbehinderte, aber auch fur 
Normalsicfatige von groBer Hilfe wSre. 
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Andere mogliche Biidanderungen waren z. B. die An- 
derung der Farbe von Objekten durch neue Farbsum- 
mation, Diese Technik konnte zur gezielten WeiBfar- 
bung von bestimmten Bereichen des Sehfeldes, und da- 
mit zur Ausloschung oder Verminderung der optischen 5 
Inforraationen verwendet werden. 

Die zweite Kategorie beinhaitet Uberlagerung von 
Bildern der gleichen Szene z. B. aus dem unsichtbaren 
intraroten Bereich oder von Radargeraten. Diese Tech- 
nik wiirde z. B. das Fahren oder Fliegen in der Nacht 10 
und be! Nebel oder Dunst wesentlich erleichtem. 

In medizinischen Anwendungen kdnnten z» B. R6nt- 
genbilder, akustische Bilder und Bilder vom Kemspinto- 
mographen dem direkten Bild des Korpers des Paten- 
tien Oder seiner Organe zur Hilfesteliung des Arztes bei 15 
der Diagnose und in der Chirurgie iiberlagert werden. 

Die dritte Kategorie umfaBt Anwendungen, in denen 
das Bild durch virtuelle Zusatzeinblendungen erganzt 
werden, wie z.B. m den Anwendungen der heutigen 
HUDs bei dem Fuhren von Fahrzeugen. Die Erfindung 20 
bietet den zusatziichen Vorteil der exakten Synchroni- 
sation der Einbiendung mit dem AuBenbild. Dadurch 
kdnnten Fremdbilder auf genau definierten freien Stel- 
len innerhalb des Direktbildes, z. B. mit geringem Bildin- 
halt, Oder ais Stereobild in einer anderen Entifemung als 25 
die ilbrigen Gegenst&nde, eingeblendet werden. 

Zu dieser dritten Kategorie gehSren interaktive An- 
wendungen aus der Computertechnik, d. h. die Einbien- 
dung einer virtuellen Computermaus (Zielkreuzes), die 
alleine mit den Augenbewegungen (anstatt mit der 30 
Hand) uber reale Gegenstande der AuBenwelt (auch 
Display) gef iihrt werden. Das Ankiicken, oder ein Befehl 
konnte hier durch zusatzliche Augenbewegungen z. B. 
Augenlidschlag, oder Stimme oder mit Tastendruck aus- 
gefiihrt werden. 35 

Diese dritte Kategorie beinhaitet auch cyberspace- 
Anwendungen, d.h. die Einbiendung von virtuellen 
Computervollbildem in die geschlossenen Brillen. Mit 
Hilfe der Erfindung konnten Aufnahmen des Netzhaut- 
bildes der eingeblendeten virtuellen Bilder genutzt wer- 40 
den, um diese gegenuber den Augenbewegungen zu sta- 
bilisieren. 

Die vierte Kategorie beschreibt eine Art *'aktives Se- 
hen'*, d h. eine vom Auge gesehene und von der Abtast- 
vorrichtung aufgenommene Szene wird in dem nach- 45 
sten Abtastzyklus mit einem Laser-Bildscheinwerf er se- 
riell beleuchtet Diese so beleuchtete Szene wird wieder 
vom Auge wahrgenommen und fuhrt in dem darauffol- 
genden Zyklus zu einem verfindertem zweiten Laser- 
Beleuchtungsvorgang, der von einem dritten Vorgang, 50 
usw.gefolgtwird 

In dieser Weise entsteht eine optische RGckkoppe- 
lungsschleife, die durch eine entsprechenden Auslegung 
der Beleuchtung als positive oder negative Ruckkoppe- 
lung fur die verschiedensten Anwendungen genutzt 55 
werden kann, z. B, um schwach erkennbare Objekte zu 
erhellen, deren Kontrast zu erhOhen oder ihrc Farbe zu 
andern. 

Patentanspriiche so 

1. Vorrichtung zur Aufnahme des auf der menschli- 
chen Netzhaut des Auges abgebildeten Bildes der 
AuBenwelt mit Hilfe einer scannenden Aufnahrae- 
vorrichtung, dadurch gekennzeichnet, daB die 65 
Strahlen der AuBenwelt durch die Glaser einer 
Brille transmittiert werden, die auf ihren Innensei- 
ten als gewdlbte abbildende Strahiteilerspiegel ge- 
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staltet sind und dafl zur Aufnahme des von jedem 
Punkt der Netzhaut zuruckgestreuten und aus dem 
Auge austretenden parallelen Strahlenbundel und 
zu ihrer Abbildung und Umlenkung eine zweiachsi- 
ge Scanvorrichtung vorgesehen ist, die das Licht- 
bundel zu einem opto-elektronischen Detektor zur 
seriellen Aufnahme des Netzhautreflexes weiterlei- 
tet 

2. Vorrichtung nach Anspruch 1, dadurch gekenn- 
zeichnet, daB mit Hilfe eines Strahlteilers Laser- 
strahlen Ober den gleichen Lichtweg, die gleiche 
Scanvorrichtung sowie Abbildung und Umlenkung 
an der Innenseite der gewolbten Brillenglaser in 
umgekehrter Richtung wie das Reflexbild auf die 
Netzhaut abgebildet werden. 

3. Vorrichtung nach Anspruch 1 und 2, dadurch 
gekennzeichnet, daB mit Hilfe eines Strahlumschal- 
ters Laserstrahlen iiber den gleichen Lichtweg, die 
gleiche Scanvorrichtung sowie Abbildung und Um- 
lenkimg an der Innenseite der gewolbten Brillen- 
glaser in umgekehrter Richtung wie das Reflexbild 
auf die Netzhaut abgebildet werden. 

4. Vorrichtung nach Anspruch 1 bis 3, dadurch ge- 
kennzeichnet, daB die momentane optische Sea- 
nachse von Scanner aus gesehen in ihrer Verlange- 
rung durch das Brillenglas inuner in eine iichtabsor- 
bierende Strahiungssenke verl&uft 

5. Vorrichtung nach Anspruch 1 bis 4, dadurch ge- 
kennzeichnet, daB die Abbildung und Umlenkung 
der von Scanner ausgehenden StrahlenbQndel vor 
der Umlenkung der Brille ins Auge mit Hilfe eines 
konkaven Hilfsspiegels abgebildet und umgelenkt 
werden. 

6. Vorrichtung nach Anspruch 1 bis 4, dadurch ge- 
kennzeichnet, daB die Abbildung der von Scanner 
ausgehenden Strahlbiindel vor der Umlenkung der 
Brille ins Auge sowohi mit Hilfe eines konkaven als 
auch konvexen Hilfsspiegels abgebildet und umge- 
lenkt werden. 

7. Vorrichtung nach Anspruch 1 und 2, dadurch 
gekennzeichnet, daB die Bildabtastung und Laser- 
projektion im Auge gegeneinander zeitlich ge- 
trennt und altemierend mit einer festen Bildfre- 
quenz durchgefuhrt werden. 

8. Vorrichtung nach Anspruch 1 bis 3, dadurch ge- 
kennzeichnet, daB wahrend der Periode der Bildab- 
tastung zeitweise auch eine Laserbildprojektion ms 
Auge durchgefiihrt wird 

9. Vorrichtung nach Anspruch 1 bis 4, dadurch ge- 
kennzeichnet, daB die Abtastspur uber die Netz- 
haut entsprechend den bekannten Video-Normen 
mit der Ablenkeinheit gef uhrt wird. 

10. Erne Vorrichtung nach den Anspriichen 1 bis 9, 
dadurch gekennzeichnet, daB die Abtastspur ra- 
sterformig iiber die Netzhaut mit einer entspre* 
chenden Auslegung und Ansteuerung der Scanvor- 
richtung durchgefiihrt wird 

11. Vorrichtung nach Anspruch 1 bis 9, dadurch 
gekennzeichnet, daB die Abtastspur spiralfdrmig 
iiber die Netzhaut mit einer entsprechende Ausle- 
gung und Ansteuerung der Scanvorrichtung ge- 
fiihrt wird. 

12. Vorrichtung nach Anspruch 1 bis 11, dadurch 
gekennzeichnet, daB im optischen Empfangskanal 
mit Hilfe von mehreren Strahlteilem und Photode- 
tektoren mehrere spektrale Bereiche des Emp- 
fangssignals unabhangig voneinander detektiert 
werden kdnnen. 
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13. Vorrichtung nach Anspruch 1 bis 12, dadurch 
gekennzeichnet, daB im Beleuchtimgskanal mit Hil- 
fe von Strahlteilem mehrere Laserstrahlen auf die 
gleiche Strahlachse gebracht werden konnen und 
dadurch gemeinsam auf die Netzhaut abgebildet 5 
werden kdnnen. 

14. Vorrichtung nach Anspruch 1 bis 13, dadurch 
gekennzeichnet, daB der Strahlengang der Laser- 
projektionseinheit und Empfangseinheit mit einer 
starren Strahlfiihrung ausgelegt ist 10 

15. Vorrichtung nach Anspruch 1 bis 13, dadurch 
gekennzeichnet, daB der Strahlengang der Laser- 
projektionseinheit mit Lasern, Bildmodulatoren 
und Strahlteilem uber eine Giasfaser an den Strahl- 
umschalter gef uhrt mr± 15 

16. Vorrichtung nach Anspruch 1 bis 14, dadurch 
gekennzeichnet, daS der Strahlengang der Emp- 
fangseinheit mit Photoempflmgem und Strahltei- 
lem Uber eine Giasfaser an die Strahlumschaltein- 
heitgefuhrtwird. 20 

17. Vorrichtung nach Anspruch 1 bis 16, dadurch 
gekennzeichnet, daB im Strahlengang der Laser- 
projektionseinheit eine Strahlfokussiereinrichtung 
integriert ist womit die GroBe des Bildflecks der 
Laser auf der Netzhaut variiert werden kann. 25 

18. Vorrichtung nach Anspruch 1 bis 17, dadurch 
gekennzeichnet, daB im Strahlengang der Emp- 
fangseinheit eine variable Gesichtsfeidblende inte- 
griert ist womit die GroBe des Abtastflecks auf der 
Netzhaut variiert werden kann. 30 

19. Vorrichtung nach Anspruch 1 bis 18, dadurch 
gekennzeichnet, daS das von den Photoempf^- 
gem aufgenommene Bild einem Bildverarbeltungs- 
computer zugelcitet wird der synchron mit der 
Bildabtastung die aufgenommenen Bilder bearbei- 35 
tet 

20. Vorrichtung nach Anspruch 1 bis 19, dadurch 
gekennzeichnet, daB das von einem Bildverarbei- 
tungscoraputer verarbeitete Bild der Netzhaut, mit 
Hilfe von elektro-optischen Modulatoren im Strah- 40 
lengang der einzelnen Laserstrahlen ein Bild syn- 
chron aber zeitversetzt mit der Abtastung auf der 
Netzhaut entstehen laBt 

21. Vorrichtung nach Anspruch 1 bis 20, dadurch 
gekennzeichnet, daB Fremdbilder von anderen 45 
Sensoren als dem Auge in dem Bildverarbeitungs- 
computer mit dem dort abgespeicherten momenta- 
nen Netzhautbiid ortlich und zeitlich synchronisiert 
wird und mit den Laserstrahlen zeitversetzt ins Au- 
ge projiziert werden. 50 

22. Vorrichtung nach Anspruch 1 bis 21, dadurch 
gekennzeichnet, daB Informationen im Computer 
generiert in dem Bildverarbeitungscomputer mit 
dem dort abgespeicherten momentanen Netzhaut- 
biid Srtlich und zeitlich synchronisiert wird und mit 55 
den Laserstrahlen ins Auge projiziert werden. 

23. Vorrichtung nach Anspruch 1 bis 22, dadurch 
gekennzeichnet, daB mit Hilfe eines optischen 
Schalters das AuBenlicht vor der BriKe teilweise 
Oder ganz zusperrt eo 

24. Vorrichtung nach Anspruch 1 bis 22, dadurch 
gekennzeichnet, daB bei verminderter oder ge- 
sperrter Sicht nach auBen und bei Projektion von 
Laserbiidern von fremden Sensoren oder Corapu- 
tem auf der Netzhaut auch wahrend der Laserpro- 65 
jektion diese Biider von den Detektoren aufgenom- 
men und dem Bildverarbeitungscomputer zuge- 
ftihrt werden. 



25. Vorrichtung nach Anspruch 1 bis 24, dadurch 
gekennzeichnet, daB die von der Netzhaut aufge- 
nommenen Bilder der AuBenwelt durch Umklap- 
pen des Strahlenganges um 180** gegenuber dem 
Achsenverlauf ins Auge den Strahl in die AuBen- 
welt zur Beleuchtung der von dem Auge gesehenen 
Objekte mit dem vom Rechner abgeleiteten Laser- 
bild verwenden. 
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